搜索资源列表
help
- 把mount写到/etc/fstab文件里面去 192.168.1.206:/u01/data/hadoop/hdfs/name /name_bak/ nfs defaults 0 0 开机后cat /proc/mounts 查看nfs目录有没有挂载上去,没有则手动挂载 修改master的hdfs-site.xml文件,把name_bak/hdfs/name加到配置文件里面去 -Please carefully write the upload information, includ
HadoopFSOperations
- 1. 概述 2. 文件操作 2.1 上传本地文件到hadoop fs 2.2 在hadoop fs中新建文件,并写入 2.3 删除hadoop fs上的文件 2.4 读取文件 3. 目录操作 3.1 在hadoop fs上创建目录 3.2 删除目录 3.3 读取某个目录下的所有文件 4. 参考资料接代码下载 -hadoop caozuo download delete
pc
- 天津大学并行计算大作业代码及实验报告。 包括: 1.利用Pthread并行实现求Pi和Jacobi迭代 2.利用MPI并行实现Jacobi迭代 3.hadoop下的Mapreduce实现Wordcount算法-Tianjin University of parallel computing job code and lab reports. Include: (1) the use of parallel implementation Pthread seeking Pi and
New-folder
- We analyze Hadoop workloads from three different research clusters from an application-level perspective, with two goals: (1) explore new issues in application patterns and user behavior and (2) understand key performance challenges related to IO a
Starfish-master
- starfish是hadoop自调优工具,可让 Hadoop 用户和应用达到最佳性能,包含三个组件: 1. Profiler 2. What-if Engine 3. Optimizer-Starfish-starfish is hadoop self-tuning tool that allows Hadoop users and applications to achieve the best performance, consists of three components: 1. Pro
MapReduce
- 高性能计算与云计算 实验报告 ——Map/Reduce编程 本实验的目的是通过练习掌握Map/Reduce编程的知识和技巧: 1) 熟悉建立分布式高性能计算平台Hadoop的基本步骤 2) 掌握用Map/Reduce编写并行计算程序的基本方法 3) 了解Map/Reduce计算程序在Hadoop下的运行和调试机制 -High-performance computing and cloud computing lab report Map/purpose of th
WordCount2
- 基于hadoop1.x的wordcount程序,jar包是全的,只要设置一下即可使用-a word count program depend on hadoop 1.x with all jar files needed,easy to use
esaymr_v1.0
- 整个框架是基于.NET Framework2.0开发,绿色不需要任何安装和复杂配置,相对与Hadoop简直可以用轻松来形容,可以让任何一个程序员或者IT短时间内快速搭建起属于自己的并行计算框架。功能介绍 1、一个并行计算软件框架 基于此框架的软件可以运行在多台计算机组成的计算集群上,并且每个计算机的计算任务也是多线程方式并行进行的,对于处理复杂的业务和巨量数据时非常用于。 2、有着MapReduce血统的任务调度监控中心 EasyMR的作业会由Mgr平台根据Key集切分成若干个数
TriangleCount
- hadoop版本的图的三角计数,比github上分享的方法快很多,没有改进算法,但是根据hadoop的特点用了2个trick:1、编写combiner2、中间键值对压缩。而且多了一轮计算节点度的job,供大家参考-hadoop triangle count, implemented by myself and effctive than that on github.
hadoop1.2.1
- hadoop的为分布式搭载步骤,这是hadoop1的搭载,和hadoop2的搭载过程有点区别-hadoop
hadoop-eclipse-plugin-1.2.1
- hadoop 1.2.1 eclipse 插件-hadoop- 1.2.1- eclipse
apache-ant-1.10.1-bin.tar
- 大数据库的导入导出,可以充分测试并发,欢迎测试!(Test concurrent tools)
绘图1
- 大数据架构图,hbase kafka solr hadoop hbase_indexer(big data hbase kafka solr hadoop hbase_indexer)
大数据培训资料(3)(1)
- This documents will tell you how to build a Hadoop platform,The content is very detailed and the pro-test has been successful!
1-cloudDay04
- 用zookeeper实现Hadoop平台中的多台服务器的可靠性保证(Using zookeeper to implement the reliability assurance of multiple servers in the Hadoop platform.)
Linux
- 1.学习并理解如何使用 Hadoop,学会在 Hadoop 中运行简单的程序,了解其运 行过程。 2.通过学习生产者/消费者问题理解多线程同步问题。 1.在 Linux 环境下建立大数据处理框架 (1)学习 Hadoop 的相关知识。 (2)安装并配置 Hadoop 环境。 (3)在 Hadoop 上执行 WordCount 示例。 2. 实现生产者/消费者同步问题 (1)在 linux 系统中学习信号量的使用。 (2)执行生产者与消费者模型。(1. learn and und